1

El panorama de la IA generativa avanzada

PolyU COMP5511Lesson 11
00:00

El panorama de la IA generativa avanzada ha evolucionado desde modelos aislados y monolíticos hacia un ecosistema multicapa definido por los Sistemas de IA compuestos. Este cambio se aleja de la simple predicción probabilística de tokens para avanzar hacia sistemas que orquestan modelos fundacionales (FM), plugins modulares y síntesis transmodal.

Cómputo / Infraestructura en la nubeLLMDifusiónAudio / CódigoCapa de orquestación y agéntica

Taxonomía del stack generativo

  • Capa de infraestructura: La base de hardware (GPU/TPU) y los servicios en la nube que proporcionan la enorme capacidad de cómputo necesaria para el entrenamiento y la inferencia de alta velocidad.
  • Capa de modelos: Los modelos fundacionales (FM) como GPT-4, Llama 3 y Stable Diffusion, que actúan como motores especializados para distintas modalidades.
  • Capa de orquestación: Frameworks que gestionan la lógica, el flujo de datos y la recuperación, transformando los modelos de pesos "congelados" a sistemas con Conciencia contextual en tiempo real.

Convergencia de modalidades

La tendencia técnica se centra en unificar arquitecturas —principalmente Transformers y modelos de difusión— permitiendo un espacio latente compartido. Esto posibilita una única interfaz unificada en la que texto, imagen y vídeo se manipulan como un flujo continuo de información, representado matemáticamente como una aplicación entre variedades latentes dispares $M_{text} \leftrightarrow M_{visual}$.

Evolución estructural
Estamos pasando de modelos de "libro cerrado" que dependen únicamente de los parámetros $\theta$ de los datos de entrenamiento, a sistemas de "libro abierto" que utilizan el estado del entorno externo $E$ para resolver tareas de razonamiento complejas mediante $P(y|x, E)$.
Implementación en Python